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(57) Zusammenfassung 
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Beschreibung 

Augmented-Reality- System zur situationsgerechten Unterstut- 
zung der Interaktion zwischen einem Anwender und einer tech- 
nischen Vorrichtung 

Die Erfindung betrifft ein Augmented-Reali ty-Sys tern zur si- 
tuationsgerechten Unterstutzung der Interaktion zwischen ei- 
nem Anwender und einer technischen Vorrichtung. 

Ein derartiges System und Verfahren kommt beispielsweise im 
Bereich der Automatisierungstechnik, bei Produktions- und 
Werkzeugmaschinen, bei Diagnose- /Serviceunterstutzungssyste- 
men sowie fur komplexe Komportenten, Gerate und Systeme, w.ie 
beispielsweise Fahrzeuge und industrielle Maschinen und Anla- 
gen zum Einsatz . 

Der Erfindung liegt die Aufgabe zugrunde, ein System und ein 
Verfahren anzugeben, das in konkreten Arbeitssituationen auf 
einfache und kostengiinstige weise einen schnellen und siche- 
ren Unterstutzung eines Anwenders ermoglicht. 

Diese Aufgabe wird durch ein System bzw. durch Verfahren mit 
den in den Anspruchen 1 bzw- 6 angegebenen Merkmalen gelost. 

Der Erfindung liegt die Erkenntnis zugrunde, daS der Anwender 
einer technischen Vorrichtung in der Regel bestimmte Schulun- 
gen absolvieren mug, bevor er in der Lage ist, komplexere 
technische Arbeiten, beispielsweise die Herstellung eines 
Zwischen und/oder eines Endprodukts bis hin zur Montage eines 
Autos auszufuhren. Eine prozessoptimierter Einsatz eines der- 
artigen Werkers kann dadurch erzielt werden, da£ der Werker 
durch das Augmented- Reality- System situationsgerechten unter- 
stutzt wird. Dabei werden reale Inf ormationen , beispielsweise 
der Ausgangszustand eines. zu fertigenden Teils erfafit und von 
System kontextabhangig hiervon die kommenden Arbei tsf olgen 
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fur den Anwender ermitl^elt unci diesem in der mobilen Vorrich- 
tung angezeigt . 

Insbesondere bei NC-gesteuerten Anwendungen ergibt sich durch 
5 die Moglichkeit zur Einblendung von Simulationsdaten eine 
weitere zusatzliche Unterstutzung fur den Anwender/ Wer- 
ker/Arbeiter . Mit Hilfe des Augmented Reality-Systems konnen 
dabei reale Information mit rechnergenerierten Visualisierun- 
gen auf Basis von Simulationsdaten uberlagert werden . Durch 
10 die Uberlagerung von realer Information mit rechnergenerier- 
ten Visual is ierungen auf Basis von Simualtionsdaten ergibt 
sich eine Unterstiitzung der Einrichtung von NC-gesteuerten 
Prozessen /Anwendungen. 

15 Vorteilhafte Ausgestaltungen bestehen darin, da& die Dokumen- 
tationsdaten statische und/oder dynamische Inf ormationsdaten 
sind. Beispiele fur derartige statische Inf ormationen sind 
technische Daten aus Handbuchern, Explosions zeichnungen, War- 
tungsanweisungeh etc.. Beispiele fur dynamische Inf ormationen 

20 sind ProzeSwerte wie Temperatur, Druck, Signale etc. 

Ein schneller situationsgerechter Zugang zu den Dokumentati- 
onsdaten wird dadurch weiter unterstutzt, dafi die Erfassungs- 
mittel eine Bildauf nahmevorrichtung aufweisen, dag die Aus- 

2 5 wertemittel zur Auswertung der realen Information in der Wei- 

se vorgesehen sind, date aus der realen Information ein 
Eisatzkontext, insbesondere ein Objekt der Dokumentationsda- 
ten ermittelt wird und daS das System Vi sual i s i e rungsmi t tel 
zur Visualisierung der Dokumentationsdaten aufweist. 

3 0 

Ein schneller si tuationsgerechter Zugang zu den Dokumentati- 
onsdaten wird dadurch weiter unterstutzt, daS die Erfassungs- 
mittel. anwendergesteuert sind und insbesondere' als sprachge- 
ste'uerte Erf assungsmi ttel und/oder durch Steuerdaten gesteu- 
3 5 erte Erf assungsmit tel ausgebildet sind. 
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Ein fur viele Anwendungsf alle optimaler Einsatz von Augmen- 
ted-Reali ty-Techniken auf Basis der statischen und/oder dyna- 
mischen Dokumentations-. und/oder Prozefidaten kann in der Wei- 
se erfolgen, ,da£ die Erf assungsmi ttel und/oder die Visuali- 
sierungsmittel als Datenbrille ausgebildet sind. 

Im folgenden wird die Erf indung anhand der in den Figuren 
dargestellten Ausf uhrungsbeispieie naher beschrieben und'er- 
lautert. 

Es zeigen: 

FIG 1 ein Blockschaltbild eines ersten Ausf uhrungsbei- 

spiels eines Augmented-Reali ty- Systems , 

FIG 2 ein weiteres Blockschaltbild eines Ausfiihrungsbei- 

spiels eines Augmented-Reali ty-Systems und 

FIG 3 ein Anwendungsbeispiel fur einen situationsgerech- 

ten Zugriff. auf Expertenwissen und/oder Dokumenta- 
tionsdaten. 

Figur 1 zeigt eine Prinzipdarstellung eines Augmented- 
Reality-Systems zur Ubertragung von ersten Inf ormationsdaten 
von einem ersten Ort 01 an einen entfernten zw;eiten Ort 02 
eines Experten fur eine Unterstiitzung eines Anwenders am er- 
sten Ort Ol beispielsweise im Service- . und/oder Reparaturf all 
durch den entfernten Experten am zweiten Ort. Der Anwender, 
der in Figur 1 nicht explizit dargestellt ist, 1st mit mobi- 
len Geraten 4, 6 ausgestat tet . Die mobilen Cerate 4, 6 bein- 
halten eine Datenbrille 4, an der eine Videokamera 2 sowie 
ein Mikrofon 11 angeordnet ist. Die Datenbrille ist mit einer 
Einrichtung zur drahtlosen Kommunikation, beispielsweise ei- 
ner Funk-Sende-Empfangsvorrichtung, 6 gekoppelt', die uber eine 
Funkschnittstelle 15 mit dem Automatisierungssys tem Al, .An 
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kommunizieren kanii . Das Automatisierungssystem Al..An ist 
liber eine Datenverbindung 14 mit einem Augmented-Reality- 
System i0 koppelbar, welches im folgenden auch abkurzend als . 
AR-System bezeichnet wird. Das AR-System enthalt ein Inf.orma- 
5 tionsmodul lb zur Speicherung bzw. zum Zugrif f von bzw. auf 
Informationsdaten, ein AR-Basismodui 8 sowie ein AR- 
Anwendungsmodul 9. Das AR-System 10 ist liber 'eine Datenver- 
bindung 13 mit dem Internet 5 verbindbar, wobei liber eine 
beispielhaft dargestellte Intemetverbindung 12 ein Zugrif f 
10 auf weit'ere Speicher- und Dokumeritationsdaten la moglich ist. 

Der Anwender, der mit. der Datenbrille 4 und der mobilen Funk- 
Sende-Einrichtung 7 ausgestattet ' is t , ist in der Lage, sich 
flir Wartungs- und Servicezwecke in der Anlage Al. .An frei zu 
15 bewegen. 1st beispielsweise die Wartung oder Reparatur einer 
bestimmten Teilkomponente der Anlagen Al . . An erf orderlich, so 
wird mit Hilfe der Kamera 2 der Datenbrille 4 gegebenenf alls 
gesteuert durch Sprachkommandos , die vom Mikrofon 11 erfaSt 
werden, ein entsprechender Zugang zu den relevanten Dokumen- 

2 0 tationsdaten la, lb hergestellt. Hierzu wird liber die Funk- 

schnittstelle 15 eine Datenverbindung zur Anlage Al . .An oder 
einem entsprechenden Funk-Sende-Modul aufgebaut und die Daten 
an das AR-System 10^, ubermittelt . Im AR-System erfolgt eine 
situationsgerechte Auswertung der vom Anwender erhaltenen Da- 
25 ten und ein automatischer oder auch ein interaktiv vom Anwen- 
der gesteuerter Zugrif f auf Inf oramtionsdaten la, lb. Die er- 
mittelten relevanten Dokumeritationsdaten la, lb, werden liber 
die Datenverbindungen 14, 15 an die Funk-Sende-Einrichtung 6 
libermittelt und insgesamt erfolgt auf Basis der erfaSten Ar- 

3 0 beitssituation somit eine Analyse, die Grundlage fur die Aus- 

wahl von Daten aus der vorliegenderi statischen Information 
ist. Hierdurch ergibt sich eine situationsgerechte, objekt- 
orientierte bzw. bauteilorientierte Auswahl relevanten Wis- 
sens aus den aktuellsten Datenquellen la, lb. Die Anzeige der 
.35 Information erfolgt mit Hilfe der jeweils verwendeten Visua- 
lisierungskomponente, beispielsweise einem Handheld~PC oder 
einer Datenbrille. Von AR-basierten Technologien gesprochen 
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wird. Der Anwender vor Ort wird somit lediglich mit der In- 
formation versorgt, die er braucht . Diese Information befin- 
det sich jeweils auf dem aktuellsten Stand. Der Servicetech- 
niker wird beispielsweise nicht durch ein "100 Seiten-Manual" 
mit Informationen tiberf rachtet . 

Figur 2 zeigt ein weiteres Anwendungs be i spi e 1 eines Systems 
zur Dokumentation.sverarbeitung . fur Service und Wartung. Das 
System besteht aus einem Augmented-Real i ty- System 10, welches 
ein Inf ormationsmodul lb zur Speicherung von Informationsda- 
ten, ein AR-Basissystem 8 sowie ein AR-Anwendungsmodul 9 ent- 
halt. Das AR- System 10 ist uber Bindungsleitungen 13, 18 ans 
Internet 5 ankoppelbar. Von dort besteht uber eine beispiel- 
hafte Datenverbindung 12 eine Verbindungsmoglichkeit zu einem 
entfernten PC 16 mit einem entfernten Experten 22. Die Kopp- 
lung zwischen den einzelnen Modulen des AR-Systems 10 erfolgt 
uber Verbindungen 19, 20, 21. Die Anwenderkommunikation zwi- 
schen einem Anwender 7 und dem AR- System erfolgt liber 
Schnittstellen 8, 23. Hierzu ist das AR-System mit einer Sen- 
de-Empf angs-Vorrichtung koppelbar, die eine bidirektionale 
Datenkommunikation zwischen dem AR-System 10 und dem Anwender 
7 uber eine Datenbrille 4 entweder direkt uber die Schnitt- 
s telle 8 Oder uber ein im Bereich des Anwenders 7 angeordnete 
Funk-Sende-Empfangseinrichtung 17 uber eine Schnittstelle 23 
ermoglicht. Die Verbindung 23 kann uber eine separate Daten- 
verbindung oder uber das Stromnetz als " Power-Line" -Modem 
realisiert werden . Die Datenbrille 4 enthalt neben einer im 
Bereich der Brillenglaser angeordneten Anzeigevorrichtung ei- 
ne Bilderf assungsvorrichtung 2 in Form einer Kamera sowie ein 
Mikrofon 11. Der Anwender 7 kann sich mit Hilfe der Daten- 
brille 4 im Bereich der Anlagen Al..An bewegen und Service- 
oder Wartungsarbeiten durchf uhren . 

Mit Hilfe der Datenbrille 4 und der entsprechenden Funk- 
Sende-Empf angsvorrichtungen, beispielsweise der Funk-Sende- 
Empf angsvorrichtung 17, die vom Personal direkt am Korper ge- 
tragen wird, ist.es moglich vorbeugende Funkt ionali tat zu er- 
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reichen: Zunachst erfolgt die Erfassung der jeweiligen Ar- 
beitssituation, beispielsweise durch die Kamera 2 oder durch 
Lokalisierung durch das Personal 7. Auf Basis der erfaSten 
Arbeitsssituation erfolgt im AR-System eine Auswahl von Daten 
5 • gewarteteri Anlage Al..An. Der grundlegende Vorteil des in Fi- 
gur 3 dargestellten Systems besteht darin, da& dieses System 
das Zusammenwirken der einzelnen Einzelf unktionalitaten an- 
wendungsgerecht untersttitzt: So wird zunachst eine konkrete 
. Arbeitssituation automatisch erfaSt, diese Arbeitssituation 

10 anschlieSend analysiert, wobei aus der aktuellsten, vorlie- 
genden statischen Information in Kombination mit den augen- 
blicklich erfaJSten dynamischen Daten automatisch die gerade 
relevanten Aspekte ermittelt werden. Hierdurch werden bei- 
spielsweise Montagehinweise mit aktuellen ProzeSdaten korre- 

15 liert. Das Personal 7 erhalt hierdurch eine situationsgerech-, 
te Anzeige der relevanten Informationen beispielsweise durch 
eine uberlagerte Visual isierung der entsprechenden Daten in 
der Weise, dafi im Sichtfeld des Personals die reale Arbeits- 
situation um die ermittelten Informationen erweitert wird. 

20 Hierdurch wird das Personal 7 in kurzester Zeit handlungsfa- 
hig gemacht und damit notwendige Maschinenlauf zeiten gesi- 
chert. Unterstutzung kann der Wartungstechniker 7 vor Ort 
auch uber den entfernten Experten 22. und das am Ort des ent- 
fernten Experten 22 vorliegende Wissen 16 erhalten. 

25 

Figur 3 zeigt ein Anwendungsbei spiel fur einen situationsge- 
rechten Zugriff auf Dokumentationsdaten. Figur 3 zeigt einen 
ersten Bi ldschirmbereich Bl, in dem eine Anlagenkomponente 
dargestellt ist. Im rechten Bildschirmbereich B2 ist ein An- 

30 wender 7 dargestellt, der beispielsweise eine einzelne Anla- 
genkomponente betrachtet. Der Anwender 7 ist mit einer Daten- 
brille 4 augerustet, die eine Kamera 2 als Erf assungsmi ttel 
enthalt. An der Datenbrille 4 ist dariiber hinaus ein Mikrof on 
11 sowie ein Lautsprecher 16 angeordnet . Im linken Bild- 

35 schirmbereicht Bl ist ein Blick auf Rohrlei tungen darge- 
stellt, die mit der im Bildfenster B2 dargestellten Daten-. 
brille betrachtet werden konnen. Im linken Bildschirmbereich 
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Bl sind zwei Punkte Bl , B2 markiert, die jeweils zwei mit 
Hilfe der Dateribrille 4 betrachtete Bildausschnitte reprasen- 
tieren. Nach Betrachtung des ersten Punkts PI, d.h. nach Be- 
trachtung der im Bereich des Punktes PI angeordneten Rohrlei- 
tung werden dem Anwender 7 Zusatzinf ormationen in der Dateri- 
brille 4 visualisiert . Diese Zusatzinf ormationen 11 bestehen 
aus Dokumentationsdaten, die bezuglich des ersten Punktes PI 
Arbeit sanweisungen fur dieses Rohrstuck enthalten und bezug- 
lich des Punktes P2 die in einem zwei ten Schritt durchzufuh- 
rende Installationsanweisung beinhalten. Die Installationsan- 
weisung besteht in diesem Fall darin, daS dem Anwender 7 das 
Drehmoment und die Drehrichtung der Schraubverbindung des 
Punktes P2 uber die Visual isierung der Zusatzdaten 112 mitge- 
teilt werden. Der Anwender 7 erhalt somit innerhalb kurzester 
Zeit eine situationsgerechte Anweisung fur das betrachtete 
Objekt. Bei der Verwendung eines intelligenten Werkzeugs, 
welches in der Lage ist, das gerade eingesetzte Drehmoment zu 
erfassen, ist es weiterhin moglich, dag der Anwender basie- 
rend auf dem aktuellen Drehmoment auch dazu aufgef ordert 
wird, da£ Drehmoment entsprechend zu erhohen oder zu'verrin- 
gern. 

Im folgenden werden Hintergruridinf ormationen zu Einsatzgebiet 
der Erfindung gegeben : Es geht dabei urn eine anwendungsorien- 
tierte Anf or derungs analyse und Entwicklung von AR-basierten 
Systemen zur Unterstutzung von Arbeit sproz ess en in Entwick- 
lung, Produktion und Service komplexer technischer Produkte 
und Anlagen in der Fertigungs- und Verf ahrenstechnik, sowie 
fur Systeme zur Serviceunterstutzung wie bei Kraf tf ahrzeugen 
oder fur die Wartung beliebiger technischer Gerate.. 

Augmented Reality, kurz AR, ist eine neue Art der Mensch- 
Technik-Interaktion mit groSem Potential zur Unters tut zung 
von industriellen Arbei tsprozessen . Bei dieser Technologie 
wird das Sichtfeld des Betrachters mit rechnergenerierten 
virtuellen Objekten angereichert, so da£ Produkt- bzw . Pro- 
zeSinformationen intuitiv genutzt werden konnen. Neben der 
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sehr einfachen Interaktion erschlieSt der Einsatz tragbarer 
Computer AR-Anwendungsf elder mit hohen Mobilitatsanf orde- 
rungen, wenn beispielsweise ProzeS-, MeS- oder Simulationsda 
ten an das reale Objekt gekniipft werden. . 

Die Situation der deutschen Industrie ist durch steigende 
Kundenanforderungen an Individuali tat und Qualitat .der Pro- 
dukte sowie durch .eine wesentliche Zei tverkurzung der Entste 
hungsprozesse gekennzeichnet . Insbesondere in Entwicklung, 
Produktion und Service komplexer technischer Produkte und An 
lagen konnen mit innovativen Losungen fur die Mensch-Technik 
Interaktion sowohl Effizienz- und Produktivi tatsspriinge er- 
zielt werden, als auch die Arbeit kompetenz- und lernf5rderl 
ich gestaltet werden, indem der Wissens- und Inf ormationsbe- 
darf der Benutzer auf der Basis ohnehin vorliegender Daten 
situationsgerecht unterstutzt wird. 

Augmented Reality ist eine Technologie mit einer Vielzahl in- 
novativer Anwendungsf elder : 

• So kann z.B, in der Entwicklung ein „Mixed Mock-Up" -Ansatz 
auf der Grundlage einer gemischt-virtuellen Umgebung die 
friihen Entwicklungsphasen deutlich beschleunigen . Gegenii- 
ber immersiven, d.h. eintauchenden, „Virtual Reality"- 
(VR) -Losungen besteht fur den Benutzer ein wesentlicher 

Vorteil darin, dalS die haptischen Eigenschaf ten mit Hilfe 
eines realen Model lis naturgetreu abgebildet werden kdnnen, 
hingegen Aspekte der visuellen Wahrnehmung, z.B. fur An- 
zeigenvarianten, virtuell manipulierbar sind. Daruber hin- 
aus besteht ein groSes Potential zur benutzerorientierten 
Validierung rechnerges tutz ter Modelle, z.B. fur die Bau- 
teilverif ikation oder bei Crash-Tests. ' 

• In der flexiblen Produktion kann unter anderem das Ein- 
richten von Maschinen fur qualif izierte Facharbeiter we- 
sentlich erleichtert werden, indem, z.B. durch mobile AR- 
Komponenten, gemischt-virtuelle Spannsi tuationen direkt im 
Sichtfeld wiedergegeben werden. Eine f acharbei tergerechte 
Fertigungsplanung und Fert igungssteuerung in der Werkstatt 
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wird erleichtert , wenn Inf ormationen uber den jeweiligen 
Auf tragsstatus direkt in Vterbindung mit den dazugehorigen 
Produkten vor Ort wahrgenommen werden. Das gleiche gilt 
auch fur die Montage, wobei dem Monteur bereits in der 
5 Trainingsphase die einzelnen Arbeitsschritte gemischt-vir- 

tuell pr.asentierbar sind. In diesem Zusammenhang konnen, 
z.B- durch den Vergleich realer Montageablauf e mit Simula- 
tionsergebnissen, umfassende Optimierungen erreicht wer- 
den, die sowohl die Qualitat der Arbeitsplanung verbessern 
10 als auch den MontageprozeS in der kritischen Anlauf phase 

vereinfachen und beschleunigen... 

• Letztlich. genligen im Service herkommliche Teehnologien 
kaum mehr, um die komplexen Diagnose- und Beheburigsproze- 
duren zu unterstutzen und zu dokumentieren. Da diese Pro- 

15 zesse in vielen Bereichen aber ohnehin auf Basis von digi- 

talen Daten geplant werden, bieten AR-Technologien die 
Moglichkeit, die Informationsquellen fur die Wartung zu 
ubernehmen und einem Techniker, z.B. in der Datenbrille, 
durch die Uberlagerung mit realen Objekten den Ausbauvor- 

20 gang zu erlautern. Mit Bezug auf kooperative Arbeit ermog- 

licht das AR-gesttitzte w Fernauge" eine verteilte Problem- 
losung, indem ein entfernter Experte mit dem Mitarbeiter 
vor Ort uber globale Distanzen hinweg kommuniziert . Dieser 
Fall ist besonders fur die iiberwiegend mittelstandischen 

25 Werkzeugmaschinenhersteller relevant. Sie sind durch die 

Global is ierung gezwungen, Produktionsstatten ihrer Kunden 
weltweit zu errichten. Jedoch.ist eine Prasenz von Nieder- 
lassungen in alien wichtigen Markten weder aus wirtschaft- 
lichen Grunden realisierbar ; noch kann auf das profunde 

30 Wissen erfahrener Service-Mi tarbeiter des Stammhauses 

bzgl . der zunehmend komplexer werdenden Anlagen verzichtet 
werden. 

Die Besonderheit in der Mensch-Technik-Interaktion bei Aug- 
mented Reality liegt in einer sehr einfachen und intuitiven 
3 5 Kommunikation mit dem Computer, beispielsweise erganzt durch 
multimodale Interakt ions techniken wie Sprachverarbei tung oder 
Gestikerkennung . Die Verwendung von tragbaren Com- 
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putereinheiten ermoglicht daruber hina.us vollig neue mobile 
Nutzungsszenarien, wobei die spezif ischen Daten jederzeit 
uber ein drahtloses Netz angefordert werden konnen. Neue Vi- 
sualisierungstechniken erlauben eine direkte Annotation, z.B. 
5 von Meg- oder Simulationsdaten, an das reale Objekt oder' in 
die reale Umgebung. In Verbindung mit verteilten Anwendungen 
sind mehrere Benutzer in der Lage, in einer realen Umgebung 
mit Hilfe einer gemeinsamen Datenbasis zu arbeiten (shared 
augmented environments) oder in verschiedenen Umgebungen AR- 
10 gestutzt zu kooperieren. 

Augmented Reality wird erst seit wenigen ■ Jahren intensiv er- 
forscht. Deshalb finden sich sowohl auf nationaler als auch 
internationaler Ebene nur wenige Anwendungen, zumeist in Form 
von wissenschaf tlichen Prototypen bei Forschungseinrich- 
15 tungen . 

• USA : Wie bei vielen neuen Technologien wurden die 
Nutzungspotentiale von Augmented Reality zuerst in 
Nordamerika erschlossen. Beispiele sind die Cockpit- 
gestaltung oder die Wartung von mechatronischen GerS- 

20 ten. Der Flugzeughersteller Boeing hat bereits erste 

Feldversuche im Bereich der Montage mit AR-Technolo- 
gien unternommen. Ergebnis ist, da£ den USA auch in 
diesem Hightech-Bereich eine Schlusselstellung zu- 
kommt, die mit einer moglichen Technologief uhrer- 

25 schaft einhergeht. 

• Japan; In Japan werden verschiedene AR-Ehtwicklungen 
vorangetrieben, z.B. zur gemischt-virtuellen Gebaude- 
planung, Teleprasenz oder „ Cyber- Shopping u . Keimzelle 
ist das 1997 gegrundete Mixed Reality Systems Labora- 

3 0 tory, das als Kompetenzzentrum gemeinsam von Wirt- 

schaft und Wissenschaf t getragen wird. Besondere Im- 
pulse im Konsumguterbereich sind zukunf tig . durch die 
japanische Industrie f ur Unterhal tungselektronik zu 
erwarten . 

35 • ^uropa ; In Europa sind bislang nur sehr wenige For- 

schergruppen im AR-Bereich tatig . Eine Gruppe an der 
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Universitat Wien befaSt sich mit Ansatzen fur die ge- 
mischt-reale Visualisierung . Die Gruppe des IGD hat 
im Rahmen des inzwischen ausgelaufenen ACTS-Proj ektes 
CICC erste Anwendungeh fur die Bauindustrie und einen 
wissenschaf tlichen Prototype!! zur Mi tarbei t erschulung 
im Automobilbau entwickelt. 

Die im Erfindung versteht sich insbesondere im speziellen 
Kontext der Anwendungsf elder " Produkt ions- und Werkzeugma- 
schinen" (NC-gesteuerte, automatisierungstechnische Prozesse) 
sowie "Diagnose-/Serviceunterstutzungssysteme fur komplexe 
technische Komponenten/Gerate/Systeme" (z.B. Fahrzeuge, aber 
auch industrielle Maschinen und Anlagen) . 

Die Reihenfolge der Arbeitsschritte wird durch eine „geeigne- 
te w Umgebungs- und Si tua t i onswahrnehmung verbessert,. Die je- 
weilige Koiftbination aus Arbei tsumgebung , Prozefisi tuat ion, 
Fortschritt der Tatigkeit und Wissen des Personals wird aus- 
genutzt, urn die nachste Abfolge von Hinweisen zu relativieren 

Die Grundidee liegt in einem Kontextabhangigen Einblenden von 
Montagehinweisen mit prozessoptimierter Vergabe der notwendi- 
gen Arbeitsschritte . Die denkbare Optimierung ist parame- 
trierbar z.B. hinsichtlich bestimmten Ressourceneinsatzes 
■(Zeit, Material, Kosten, ;.".). 

Zusammenfassend betrif f t die Erfindung somit ein Augmented- 
Reality-System mit einer mobilen Vorrichtung zum kontextab- 
hangigen Einblenden von Montagehinweisen. Durch das kontext- 
abhangige Einblenden von Montagehinweisen mit prozessopti- 
mierter Vorgabe der notwendigen Arbeitsschritte ergibt .sich 
eine situationsgerechte Unterstut zung durch von Arbeitsfol- 
gen. Zusatzlich konnen beispielsweise in Abhangigkeit be- 
stimmter Montageschritte etc., d.h. bei einem fest vorgegebe- 
nen Montageablauf weitere die jeweilige Arbei tssituation be- 
treffende Zusatzhinweise dem Anwender eingeblendet werden . So 
konnen beispielsweise vorbeugende . Wartungshinweise etc. kon- 
textabhangig zeit- und prozess- optimiert gegeben werden.. 
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Patentanspruche 

1. Augmented-Reality-System zur situationsgerechten Unter- 
stiitzung der Interaktion zwischen einem Anwender (1) und ei- 

5 ner technischen Vorrichtung (Al..An), insbesondere fur tech- 
nische und industrielle Anwendungen, mit Erf assungsmi tteln 
zur Erf assung von realen Informationen und mit Mitteln zur 
kontextabhangige Bestimmung von Arbeitsf olgen des Anwenders 
(1) und mit einer mobilen Vorrichtung (4) zum kontextabhan- 
10 gigen Einblenden der Arbeitsf olgen . 

2. System nach Anspruch 1, 

dadurch gekennzeich.net, 

da£ das System Mittel zur prozessoptimierten Vergabe der Ar- 
15 beitsschritte aufweist, wobei die Optimierung insbesondere 
hinsichtlich bestimmten Ressourceneinsatzes parametrierbar 
ist. 

3. System nach einem der Anspriiche 1 oder 2, 
20 dadurch gekennzeichnet, 

dafi das System Erf assungsmi ttel (2, 11) mit einer Sensorik, 
insbesondere einer Bildauf nahmevorrichtung zur Erf assung der 
ertsen Inf ormationsdaten sowie Visualisierungsmittel (4) zur 
Visualisierung der z-weiten Inf ormationsdaten aufweist. 

25 

4. System nach einem der Anspriiche 1 bis 3, 
dadurch gekennzeichnet, 

dafi die Erf assungsmi ttel (2) anwendergesteuert sind und ins- 
besondere als sprachgesteuerte Erf assungsmi ttel und/oder 
■3 0 durch Steuerdaten gesteuerte Erf assungsmi ttel ausgebildet 
sind. 

5. System nach einem der Anspriiche 1 bis 4, 
dadurch gekennzeichnet, 

3 5 daS die mobile Vorrichtung eine Datenbrille (4) aufweist. 
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6. Verfahren zur situationsgerechten Unterstutzung der Inter 
aktion zwischen einem Anwender (1) und einer technischen Vor 
richtung (Al..An) in einem Augment ed-Reali ty-System, insbe- 
sondere fur technische und industrielle Anwendungen, bei dem 
reale Inf ormationen erf aSt werden und hieraus kontextabhangi 
ge Arbeitsfolgen des Anwenders (1) bestimmt werden und dem 
Anwender auf der mobi 1 en Vor richtung ( 4 ) kontextabhangige Ar- 
beitsfolgen eingeblendet werden. 

7. Verfahren nach Anspruch 6, 

dadurch gekennzeichnet, 

da£ eine prozessoptimierte Vergabe der Arbeitsschri tte vorge- 
sehen ist, wobei die Optimierung insbesondere hinsichtlich 
bestimmten Ressourceneinsatzes parametrierbar ist. 

8 . Verfahren nach einem der Anspruche 6 oder 7 , 
dadurch gekennzeichnet, 

da£ die ersten Informationsdaten mittels Erf assungsmitteln- 
(2, 11) mit einer Sensorik, insbesondere einer Bildauf nahme- 
vorrichtung erfaSt und da£ die zweiten Informationsdaten mit- 
tels Visualisierungsmitteln (4) dem Anwender (7) visualisiert 
werden. 

9. Verfahren nach einem der Anspruche 6 bis 8, 
dadurch gekennzeichn.et, 

da£ die Erf assungsmittel (2) anwendergesteuert sind und ins- 
besondere als sprachgesteuerte Erf assungsmittel und/oder 
durch Steuerdaten gesteuerte Erf assungsmittel ausgebildet 
sind. 

10. Verfahren nach einem der Anspruche 6 bis 9, 
dadurch gekennzeich.net, 

dag die Erf assungsmittel (2) und/oder die Visualisierungsmit- 
tel als Datenbrille ausgebildet sind. 
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